研究:用诗歌就能让AI说违禁内容,成功率达62%
IT之家 12 月 1 日消息,研究用诗事实证明,违禁只需一点创意,内容新余市某某过滤器制造厂便足以绕过人工智能聊天机器人的成功安全防护机制。在伊卡洛实验室(Icaro Lab)最新发表的率达一项题为《对抗性诗歌:一种通用的单轮大语言模型越狱机制》的研究中,研究人员通过将提示词以诗歌形式表达,研究用诗成功绕过了多种大语言模型(LLM)的违禁安全限制。 该研究指出,内容“诗歌形式可作为一种通用型越狱操作符”,成功新余市某某过滤器制造厂实验结果显示,率达整体上有 62% 的研究用诗成功率诱使模型生成被禁止的内容,包括涉及制造核武器、违禁儿童性虐待材料以及自杀或自残等相关信息。内容 IT之家注意到,成功研究测试了多款主流大语言模型,率达包括 OpenAI 的 GPT 系列、Google Gemini、Anthropic 的 Claude 以及其他多个模型。研究人员进一步列出了各模型的具体成功率:Google Gemini、DeepSeek 和 MistralAI 在测试中始终会提供违规回答,而 OpenAI 的 GPT-5 系列模型和 Anthropic 的 Claude Haiku 4.5 则最不容易突破其自身设定的限制。 尽管该研究并未公开研究人员所使用的具体“越狱诗歌”原文,但研究团队向 Wired 杂志表示,这些诗句“过于危险,不宜向公众披露”。不过,论文中确实包含了一个经过弱化处理的示例,用以说明绕过 AI 聊天机器人安全机制的简易程度。研究人员强调:“这可能比人们想象的要容易得多,而这正是我们保持谨慎的原因所在。”![]()
-
上一篇
-
下一篇
- 最近发表
- 随机阅读
-
- 数千架空客A320飞机需紧急更换软件,多家航司已停飞
- 万架无人机表演点亮深圳夜空
- 美股开盘涨跌不一 特斯拉大跌8%
- 北京楼市数据,市场日评,10月3日已更新!
- 美图产品AI渗透率接近90% 吴欣鸿获评2025年度科技领军人物
- 中建玖玥府勇夺9月北京销冠丨网签月报
- 国庆7天长假,南京禄口机场旅客吞吐量约67.1万人次
- 从太空看青藏高原,航天员竟然发现一颗心
- 接住成长情绪 陪孩子走出分数焦虑
- 北京930后,刚需请立马上车!
- 9月极氪交付21333台 创历史新高
- “闭眼摇”系列来了!二环低至1.4万/㎡,下半年这7盘引爆西安楼市!
- 大使馆通报仝卓表弟已获救
- 终于!丰台这个棚改项目5条配套道路将开建!
- 和光悦府是冠军!|网签榜周报
- 北京楼市数据,市场日评,10月2日已更新!
- 35岁男子租车自驾川西失联10天,家属:他今年7月才拿到驾照,担心出意外
- 智己汽车9月销售4516台 同比增长150%
- 首套免契税,二套契税减半,这个城市的国庆大礼包值了
- 成都公积金贷款额度或提高至100万元 有望“商转公”
- 搜索
-